Metric	Score
Acc	4.96

Metric	Score
Acc	6.88

worst items

note: the gold standard is taken from the submission itself, not from the challenge data!

#	input	expected output	actual output	dev-0 Acc
1	W którym państwie została ogłoszona „Deklaracja praw człowieka i obywatela”?	we Francji	Nigdzie	0.00
2	Która kawa zawiera alkohol: po turecku czy po irlandzku?	po irlandzku	Nie	0.00
3	W którym mieście zmarł Sławomir Mrożek?	w Nicei	Warszawa	0.00
4	Jak nazywał się autor powieści „Wierna rzeka”?	Stefan Żeromski	.	0.00
5	W którym polskim mieście wybrzeża znajduje się Fontanna Neptuna?	w Gdańsku	1	0.00
6	Na którym kontynencie leżała Kartagina?	w Afryce	1	0.00
7	Jak nazywał się reżyser pierwszego polskiego w filmu w 3D: „Bitwa Warszawska”?	Jerzy Hoffman	?	0.00
8	Które owady australijskie tworzą ogromne kopce, wysokie na 6 metrów?	termity	1	0.00
9	Co jest dłuższe: mila morska czy kilometr?	mila morska	kilometr	0.00
10	W którym zespole ludowym w początkach kariery śpiewała Irena Santor?	Mazowsze	Nie	0.00
11	W którym mieście znajduje się cmentarz na Rossie?	w Wilnie	Białystok	0.00
12	Ku czci której greckiej bogini organizowane były panatenaje?	Atena	1	0.00
13	Co ma pod stopami Wenus na obrazie Botticellego pt. „Narodziny Wenus”?	muszlę	Nic	0.00
14	Czy wszystkie samogłoski w polskim języku są dźwięczne?	tak	Nie	0.00
15	W co nie daje sobie dmuchać osoba stanowcza?	w kaszę	.	0.00
16	Jak miał na imię generał amerykański McArthur?	Douglas	Tak	0.00
17	Jak nazywał się właściciel cukierni, w której w latach 1905-12 działała grupa Zielony Balonik?	Jan Apolinary Michalik	.	0.00
18	Ilu synów miał patriarcha Jakub?	dwunastu 12	2	0.00
19	Zwolnienie której robotnicy spowodowało strajk w Stoczni Gdańskiej?	Anny Walentynowicz	1	0.00
20	Częścią którego oceanu jest Morze Czerwone?	Oceanu Indyjskiego	Nie	0.00
21	Do którego warzywa odsyłamy coś, co się do niczego nie nadaje?	do chrzanu	Żadnego	0.00
22	Jak z greki nazywa się chorobliwy strach przed ogniem?	pirofobia	Tak	0.00
23	W którym wieku ukazał się na łamach Kuriera Codziennego ostatni odcinek „Lalki”?	w XIX 19	?	0.00
24	Jak nazywał się Michał Anioł?	Buonarotti	Anioł	0.00
25	Jak ma na imię ciocia w piosence Agnieszki Osieckiej „Damą być”?	Jadzia	?	0.00
26	Czy koziołek Matołek dotarł w końcu do Pacanowa?	tak	Nie	0.00
27	Nad którym morzem leżą Inflanty?	nad morzem Bałtyckim nad Bałtykiem	Nie	0.00
28	Jak nazywa się modyfikowany tlenek cyrkonu, imitujący diament?	cyrkonia	Tak	0.00
29	W którym miesiącu 1968 roku miały miejsce w Polsce protesty studentów?	w marcu	1	0.00
30	Jak w gwarze więziennej nazywa się nielegalnie przemycony list?	gryps	Tak	0.00
31	Do kogo Oleńka z Potopu zwraca się słowami: „ran Twoich niegodnam całować”?	do Kmicica	Nikt	0.00
32	Jak po staropolsku zwał się okres od Bożego Narodzenia do Trzech Króli?	Gody	Tak	0.00
33	Proszę podać wzór na objętość prostopadłościanu o krawędziach a, b i c?	abc a * b * c	Tak	0.00
34	W którym mieście odbyła się premiera opery Giuseppe Verdiego „Aida”?	w Kairze	Nie	0.00
35	Jak nazywał się podróżnik i żołnierz, który dokonał podboju Madagaskaru?	Maurycy Beniowski	.	0.00
36	Jakie warzywo jest jednym z głównych składników kopytek?	ziemniaki	1	0.00
37	Dla kogo był przeznaczony obóz zwany oflag?	dla oficerów	Nikt	0.00
38	Która rzeka o długości ok. 300 km rozdziela USA i Meksyk?	Rio Grande	Żadna	0.00
39	W którym amerykańskim mieście podpisano Deklarację Niepodległości?	w Filadelfii	1	0.00
40	W którym europejskim mieście znajduje się kościół La Sagrada Familia?	w Barcelonie	Nie	0.00

Metric	Score
Acc	7.20